Silver werd in Connecticut geboren als Horace Ward Martine Tavares Silva. Zijn familie kwam oorspronkelijk uit de Kaapverdische eilanden. Hij werd vanaf zijn jeugd erg beïnvloed door de muziek uit Kaapverdië.
Zijn eerste instrument was de saxofoon. Later koos hij voor de piano en ging hij op tournee met saxofonist Stan Getz. Hij trok naar New York, waar hij 25 jaar lang voor het Blue Note-label werkte.
Zijn eerste album, "Horace Silver and the jazz messengers", wordt beschouwd als de hoeksteen van de hardbop. Deze jazzstijl haalt inspiratie uit rhythm-and-blues, gospel en blues.
De gewaardeerde pianist trad meermaals op in de Hnita jazzclub in Heist-op-den-Berg van wijlen Juul Anthonissen.